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Abstract 



Image sensors (1, 2) which are rotated through 90 DEG relative to one another and have selective pixel 
access are used for rapid image recording. In this way, a short pixel access time is attained for the row and 
column directions. In order to recognize the position of objects with orthogonal edges, the individual light- 
sensitive elements are arranged in a rectangular configuration and/or the spacings between the individual 
rows are mutually offset This reduces the number of pixels required and improves the recognition of edges. 
As a whole, the method drastically reduces the recognition time when determining the position of technical 
objects with orthogonal edges and, at the same time, improves the degree of accuracy which can be 
attained. 
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(g) Biidaufnahmesystem und Verfahren zur Bildaufnahme 

(§7) Zur schnellen Bildaufnahme werden urn 90° gegenein- 
ander gedrehte Bildsensoren mit wahhrveisem Bildpunktzug- 
rtff eingesetzt. Dadurch wird fur Zeilen- und Spaitenrichtung 
sine kurze Bildpunktzugriffszeit erreicht Fur die Lageerkan- 
nung von Objekten mit orthogonalen Kanten erfolgt eine 
rechteckformige Ausbildung der einzelnen photoempfmdli- 
chen Eiemente und/oder ein Versatz der Teilung der einzel- 
nen Reihen zueinander, Hieraus resultiert eine Reduzierung 
der bendtigten Bildpunktanzahf, sowie eine verbesserte 
Kantenerkennung. Insgesamt wird durch das Verfahren bei 
einer Position sbesti mm ung von ,technischen Objekten mit 
orthogonalen Kanten die Erkennungszeit drastisch reduziert 
und gfeichzeitig die erreichbare Genauigkett deutlich verbes- 
sert. 
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Die Erfindung betrifft ein Bildaufnahmesystem mh 
einem entsprechenden Verfahren zur Beherrschung von 
schnellen Positionierprozessen oder Montageablaufen 
unter Einsatz von Bildaufnahme- und Bildauswertungs- 
einheiten. 

... Allgemein bekannte Bildverarbeitungssysteme bein- 
halten beispielsweise auf Femsehbildem basierende 
Bildsensoren, denen entweder ein punkt- und zeilenwei- 
se abtastendes System oder eine rasterartig angeordne- 
te photoelektrische Halbleiteranordnung zur Bildauf- 
nahme zugrundeliegt. In alien Fallen wird ein Bild eines 
Objektes erzeugt bzw. aufgenommen, wobei eine be- 
stimmte Bildaufnahmezeit notwendig ist Zur anschlie- 
Benden Bildauswertung ist eine weitere Zeitdauer zu 
berucksichtigen. Je nach Anforderung bezuglich der 
Genauigkeit der Bildauswertung oder der Schnelligkeit 
einer Objektpriifung stoBen bestimmte Systeme scbnell 
an ihre Grenzen. 

Bei hochautomatisierten Montageprozessen und 
Handlingsablaufen werden die Taktzeiten immer kur- 
zer. Sie werden mittlerweise von 1 Sekunde auf 0,1 Se- 
kunden gedruckt Typische Beispiele hierfur sind schnel- 
le Positionierprozesse und Montageablaufe in der Mi- 
kroelektronik und in der Flachbaugruppenfertigung. 
Aufgrund der allgemein hohen Genauigkeitsanforde- 
rungen mussen derartige Prozesse adaptiv erfolgen. 
Das heiBt, daB die relative und auch die absolute Posi- 
tion der Werkstiicke, Teile oder Baueiemente beruh- 
rungslos in kurzer Zeit zu erfassen ist Hierzu werden 
heute im allgemeinen auf Fernsehbildern basierende 
Bildverarbeitungssysteme eingesetzt, die im Mittel je 
. nach Komplexitat der Anwendung eine Reaktionszeit 
von ca. 100 msec aufweisen. Diese Reaktionszeit setzt 
sich zusammen aus einer Zeit fur die reine Bildaufnahme 
von ca. 50 msec Weitere 50 msec werden fur die Aus- 
wertung von beispielsweise 250.000 Bildpunkten bend- 
tigt. 

Aus dieser Situation heraus ist die Erkennungszeit/ 
Reaktionszeit heutiger Bildverarbeitungssysteme fur 
schnelle Montage- und Handlingsprozesse nicht mehr 
wesentlich zu verkurzen. Dies gilt auch fur den Fall daB 
die Rechnerleistung deutlichgesteigert wird 

Aus der Deutschen Patentschrift DE 41 23 203 ist ei- 
ne Anordnung von Festkorper-Bildwandlern als strah- 
Iungsempfindliche Elemente bekannt, mit der Objekte 
in einem Raum Jokalisiert und ausgewahlte Objekte de- 
tailweise identifiziert werden konnen. Die Anordnung 
besteht aus strahlungsempfindlichen Elementen mit ei- 
ner hoheren Verteilungsdichte in der Mitte der strah- 
. lungsempfindlichen Flache des Biltfwandlers. 

Der Erfindung liegt die Aufgabe zugrunde, ein Bild- 
aufnahmesystem und ein Verfahren -zur Bildaufnahme 
bereit zu stellen, womit eine Reduzierung der Erken- 
nungszeit bei technischen Objekten erzielbar ist, so daB 
Taktzeiten verkurzbar sind. 

Die Losung dieser Aufgabe geschieht durch die 
Merkmale des Anspruchs 1 bzw. des Anspruchs 7. 

Die Erfindung beruht auf der Erkenntnis, daB die Ver- 
kiirzung von Reaktionszeiten eines Bildverarbeitungs- 
systems zunachst durch den Einsatz von wahlfrei ausles- 
baren Bildsensoren eingeieitet wird, Nachdem bedingt 
durch das Schaltungsprinzip von heutigen Bildsensoren 
(beispielsweise in CMOS-Technologie) die Zugriffszei- 
ten in Spaltenrichtung jedoch noch wesentlich langer 
sind als in Zeilenrichtung, werden erfindungsgemaB 
zwei gleiche wahlfrei aus lesbare Bildsensoren verwen- 
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det, die bezogen auf die Bildaufnahmerichtung um 90° 
gegeneinander gedreht sind Diese beiden Bildsensoren 
werden Qber einen-Teiierspiegei mit dem gleichen opti- 
schen Bild beaufschlagt und sind jeweils an ihren Aus- 
5 gsingen mit einer Bildverarbeitung verbunden. Diese 
Bildverarbeitung wertet zweidimensionale, beispiels- 
weise Grauwertbilder, aus. Dazu werden an jedem Bild- 
punkt Helligkeitswerte aufgenommen.-Mit der Erfin- 
dung werden die relativ iangsamen Zugriffszeiten senk- 
io recht zur Zeilenrichtung des Biidsensors faBt volistandig 
yermieden. Die Auswenung wird durch die Paralielitat 
in den beiden ebenen Richtungen erheblich beschleu- 
nigt. Dies geschieht aufgrund der Tatsache, daB die Zei- 
lenrichtungen der beiden verwendeten Bildsensoren 
eben um 90° gegeneinander gedreht sind, so daB bei der 
relativ schneilen wahifreien, aber in Zeilenrichtung vor- 
genommenen Auslesungdas Bad des Objektes in beiden 
ebenen Richtungen schnell erfaBbar ist bzw. aus den 
Bildsensoren ausgelesen werden kann. Durch diese 
MaBnahmen wird zunachst die Bildaufnahmezeit ver- 
kurzt, Damit werden Engpasse ausgeschaltet, die bei 
einer spaltenweisen Auslesung mit einer Frequenz von 
beispielsweise 100 kHz verbunden sind Durch die erfin- 
dungsgemaBen MaBnahmen wird eine Bildpunktausle- 
sefrequenz von beispielsweise 5 bis 10 MHz ermoglicht 
Somit werden insgesamt die Bildaufnahme und auch die 
Bildverarbeitungszeit verringert 

Durch die Verwendung von Bildsensoren hach der 
MOS-Technik oder der CMOS-Technik werden beson- 
dere Vorteile bezuglich der Stromaufnahme im Betrieb 
bzw. in Ruhestellung erreicht. 

Eine weitere vorteilhafte Ausgestaltung der Erfin- 
dung sieht eine Iangsgestreckte rechteckformige Ausge- 
staltung der Bildelemente vor, die vorzugsweise parallel 
zu geraden Kanten des Objektes ausgerichtet sein soil- 
ten. Das Seitenverhaltnis der Rechteckform der Bildele- 
mente kann beispielsweise 1 : 3 oder auch 1 : 4 sein. Da- 
durch reduziert sich die Anzahl der Bildpunkte bzw. 
Bildelemente. Ferner wird zusatzlich ein Kantenfilter 
geschaffen. Falls Iangsgestreckte rechteckige Bildele- 
mente eingesetzt werden, so sind diese fiber den Sensor 
verteilt einheitlich ausgerichtet und entfalten ihre Fir- 
kung durch den Einsatz von 90° gegeneinander gedreh- 
ten Bildsensoren in jeder ebenen Richtung. 

Eine vorteilhafte Weiterbildung der Erfindung sieht 
emen Versatz der BDdelemente auf dem Sensor vor, der 
zwischen den Zeilen um eine halbe PbcelgroBe bzw. um 
die halbe Breite eines Bildeiementes vorgenommen 
wird Auch hierdurch lassen sich in vorteilhafterweise 
die geraden und orthogonalen Kanten eines technischen 
Objektes, das in der Regel Qber mehrere Zeilen hinweg- 
geht, schnell und mit hoher Auflosung detektieren. Dies - 
geschieht aufgrund der Tatsache, daB eine Interpolation 
und damit eine Verdopplung der Auflosung erreicht 
werden kann. 

Durch den Einsatz von wahlfrei auslesbaren Bildsen- 
soren, die um 90° gegeneinander angestellt sind, sowie 
eine parallele Auswertung in x- und y-Richtung, verbun- 
den mit recht eckig langsgestreckt ausgebildeten Bild- 
elementen,.die annaherend parallel zu den zu erkennen- 
den Kanten eines Objektes verlaufen und weiterhin ver- 
bunden mit dem Versatz des Pixelrasters in Zeilenrich- 
tung um eine halbe Teilung innerhalb des Biidsensors 
IaBt sich eine insgesamte Verkiirzung der Reaktionszeit 
eines Biidsensors auf 1/10 der derzeit bekannten Reak- 
tionszeiten bei bisher bekannten Bildsensoren errei- 
chen, beispielsweise eine Verkiirzung von 100 ms auf 10 
ms. 
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Im folgenden wird anhand von zwei schema tischen* 
Figuren em AusfQhrungsbeispiel beschrieben. 

Fig* 1 zeigt ein Hochgeschwindigkeitsdatenaufnah- 
mesystem mit zwei getrennten wahlfrei auslesbaren 
Biidsensoren, die um 90° gegeneinander gedreht sind, 

Fig. 2 zeigt die Anordnung von Bildelementen eines 
wahlfrei auslesbaren Bildsensors, die gegeneinander um 
eine halbe Teilung versetzt sind und eine rechteckformi- 
ge langgestreckte Form aufweisen, wobei das Verhilt- 
nis zu den sichtbaren Flachen der AnschluBbeinen von 
SMD-Bauelementen angedeutet ist 

Die Erfindung benutzt die neueste Entwicklung von 
Bildwandlern, beispielsweise in CMOS-Technik. Im all- 
gemeinen sind fur die Lageerkennung technischer Ob- 
jekte wie beispielsweise Referenzmarken, Bauelemente 
. . „ nur wenige Prozente aller Bildpunkte eines Bildes 
notwendig. Durch einen wahlfrei auslesbaren (Random 
Access) Bildsensor laBt sich einmal die Informationsauf- 
nahmezeit (Bildaufnahmezeit), sowie auch die Verarbei- 
tungszeit (Bildverarbeitungszeit) durch die geringere 
Bildpunktzahl deutlich senken. Dies setzt ailerdings eine 
Zugriffszeit voraus, die im Bereich der Fernsehbild- 
punktfrequenz liegt, beispielsweise bei 5—10 MHz. Be- 
dingt durch das Schaltungsprinzip bei heutigen CMOS- 
Bildsensoren werden die Zugriffszeiten nur in Zeilen- 25 
richtung, aber nicht senkrecht dazu in Spaltenrichtung 
erreicht In Spaltenrichtung liegen diese Zugriffszeiten 
sehr viel niedriger, beispielsweise bei 100 kHz. Somit 
wurde fur eine Lageerkennung in beiden ebenen Rich- 
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gedreht, so daQ die Zeilenrichtungen fQr das gieiche BOd 
auch um 90° gegeneinander angesteilt sind. Dies be- 
wirktdaB fQr die Bildverarbeitung 3, die auf beide Bilder 
oder Ergebnisse eines Bildsensors 1, 2 zugreift, nicht nur 
ein wahlfreies Auslesen moglich ist, da die beiden Biid- 
sensoren wahlfrei aus lesbar sind, sondem daB daruber 
hinaus korrespondierende Punkte eines Bildes 15, 16 mit 
hoher Geschwindigkeit zeilenweise entweder im einen 
Bild oder im anderen Bild auslesbar sind Ein Bildsensor 
1, 2, der bei Vorgabe entsprechender Adressen im Ex- 
tremfall jeden Punkt einzeln wahlfrei aus Iesen kann, ist 
bei heutiger verfiigbarer Technik (CMOS-Bildsensoren) 
bedingt durch innere Schaltungsprinzipien trotzdem in 
Zeilenrichtung noch sehr viel schneller auslesbar, ais in 
Spaltenrichtung. Durch die gegenseitige Verdrehung 
der Biidsensoren 1, 2 erubrigt sich eine Auslesung in 
Spaltenrichtung. 

Bei technischen Objekten, die sich in der Regel.uber 
mehrere Zeilen erstrecken, und die gerade und orthogo- 
naie Kanten aufweisen, konnen bestimmte Bildmerkma- 
le fiir die Bildverarbeitung 3 voreingestellt sein. Gepriift 
wird in einem zweidimensionalen Bild wie die Ausrich- 
tung in x- und y- Richtung. ist, und welche Verdrehung 
eines Bauelementes auf einer Leiterplatte vorliegt 

In Fig. 2 wird eine Anordnung von Bildelementen 8 
dargestellt, wobei die einzelnen Bildelemente beispiels- 
weise eine Breite 9 von 25 jim und eine Lange 10 von ca. 
75 jim aufweisen. Weiterhin ist zur Erkennung der Rela- 
tion zwischen einem SMD-Baueiement und dem Bild- 



tungen (in x- und y-Richtung) der Vorteil eines einzigen 30 sensor die ungefahre Lage von AnschluBbeinchen 14 
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wahlfrei auslesbaren Bildsensors wieder weitgehend 
durch die relatiy iangsame Auslesemoglichkeit in Spal- 
tenrichtung zunichte gemacht Genau dieser EngpaB 
wird durch die erfindungsgemaB ausgelegten und ge- 
geneinander um 90° gedrehten zwei Biidsensoren ent- 
sprechend Fig. 1 ausgeraumt 

Eine Reduzierung der zu verarbeitenden Bildpunkte 
sowie eine Filterfunktion fur orthogonaJe Kanten bei 
gleichzeitiger Verbesserung des Signal/Rausch-Ver- 
haltnisses ergibt sich durch die rechteckige langsge- 
streckte Struktur von Bildelementen, beispielsweise mit 
einem Seitenverhaltnis von ungefahr 1 : 3. Ohne die Er- 
kennungsgenauigkeit zu verschlechtern ergibt sich al- 
iein aus dieser Anordnung eine Verkurzung der BOdauf- 
nahmezeit auf ein DritteL Die Auswirkungen auf die 
Verringerung der Bilderkennungszeit sind ahnlich. 
Grundsatzlich kann eine Verbesserung der Bildaufnah- 
me und Bildverarbeitungszeit fiir die Verbesserung der 
Erkennungssicherheit herangezogen werden oder fQr 
die Beschieunigung des Verfahrens. Eine wertere Ver- 
kleinerung der erforderlichen Bildpunktzahl, wie es 
durch den zeilenweisen Versato der Bildelemente im 
Sensor um eine halbe PixelgrdBe ermoglicht wird, kann 
beispielsweise die Verdopplung der Auflosung bewir- 
ken. 

In Fig. 1 ist ein System zur Lageerkennung und Lage- 
kontrolle eines Objektes, in diesem Fall eines oberfla- 
chenmontierten elektronischen Bauelementes (SMD) 
mit einer Grofie von beispielsweise 50 x 50 mm, darge- 
stellt Das Objekt 6 wird in ublicher Art moglichst 
gleichmaBig beleuchtet und uber ein Objektiv 5 auf die 
beiden um 90° gedreht angeordneten Biidsensoren ab- 
gebildet Diese Biidsensoren 1, 2 bestehen aus einer 
Vielzahl von Zeilen 12, 13, die wiederum in Bildelemente 
8 (Photoelemente, photosensitive Hemente) unterteiit 55 17 Bauelement, Chip, 
sind. Die beiden Biidsensoren 1, 2 nehmen somit das 
gieiche Objekt 6 zu gleichen Zeit auf, sind jedoch gegen- 
einander um 90° bezogen auf die Bildaufnahmerichtung 



bzw. von deren Bild auf dem Bildsensor 1, 2 dargestellt. 
Die beiden AnschluBbeinchen 14 bzw. deren von oben 
sichtbaren Teile weisen ein BeinchenrastermaB 1 1 von 
03 mm auf. In Fig. 2 ist der Versatz zwischen den Bild- 
elementen 8 von Zeile zu Zeile sichtbar. Weiterhin sind 
langsgestreckte rechteckige Bildelemente eingezeich- 
net Das Bauelement 17 ist am unteren Rand der Fig. 2 
angedeutet 

Ein verwendet er Bildsensor hat beispielsweise eine 
Pixelanzahl von 2000 x 600 PixeL Die mit der Erfindung 
erzielbare Reduzierung der Erkennungszeit bei techni- 
schen Objekten mit orthogonalen Kanten und geringer 
Winkelverdrehung wird drastisch reduziert Fur sog. 
SMD-Bestuckautomaten bedeutet dies beispielsweise 
45 eine Verkurzung der Positionserkennungszeit von 100 
ms auf 10 ms bei gleichzeitiger Steigerung der Genauig- 
keit. Die Bestuckungsleistung je Automat wird dadurch 
bei gleichbleibenden Kosten verdoppeit 



50 



Bezugszeichenliste 



1,2 Bildsensor 

3 Bildverarbeitung 

4 Teilerspiegel 
55 SOptik 

6 Objekt, SMD-Bauteil 

7 MeBstrahl 

8 Bildelement 

9 Breite eines Bildelementes 

10 Lange eines Bildelementes 

11 BeinchenrastermaB 
12, 13 Zeile 

14 Bild eines AnschluBbeinchens 
15, 16 Bild eines Objektes 
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. . , . . PatentansprQche 

1. Biidaufnahmesystem mit nachgeschalteter Bild- 
verarbeitung (3) bestehend aus zwei wahlfrei aus- 
lesbaren Bildsensoren (1, 2) zur Aufhahme eines aus 5 
Bildpunkten bestehenden zweidimensionalen Bil- 
des (15, 16) eines Objektes (6), wobei das System 
zwei Bildsensoren (1, 2) aufweist, die bezogen auf 
die Bildaufnahmerichtung urn 90° gegeneinander 
gedreht sind und der das Bild des Objektes uber 10 
einen Teilerspiegel (4) beiden Bildsensoren zuge- 
fuhrt wird. 

2. Biidaufnahmesystem nach Anspruch 1, worin die 
wahlfrei auslesbaren Bildsensoren (1, 2) in MOS- 
Technologie ausgefuhrt sind I5 

3. Biidaufnahmesystem nach Anspruch 2, worin die 
wahlfrei auslesbaren Bildsensoren (1, 2) in CMOS- 
Technologie ausgefuhrt sind. 

4. Biidaufnahmesystem nach einem der vorherge- 
henden Anspruche, worin Bildelemente (8) der 20 
Bildsensoren (l f *2) eine rechteckige langsgestreckte 
Form aufweisen. 

5. Biidaufnahmesystem nach Anspruch 4, worin die 
Bildeleinente (8) eine rechteckige Form mit einem 
Seitenverhal tnis von ungef ahr 1 /3 aufweisen. 25 

6. Biidaufnahmesystem nach einem der vorherge- 
henden Anspruche, worin im Bildpunktraster eines 
Bildsensors zwischen den Zeilen ein gegenseitiger 
Versatz der Bildelemente (8) um den Bruchteil ei- 
ner Pbcelteilung vorhanden ist 30 

7. Biidaufnahmesystem nach Anspruch 6, worin der 
Versatz der Bildelemente (8) eine halbe Pbceltei- 
lung betragt. 

8. Verfahren zur Bildaufnahme mit einem Biidauf- 
nahmesystem entsprechend einem der Anspruche 1 35 
bis 7, worin 

— . zwei wahlfrei auslesbare Bildsensoren ein- 
gesetzt werden, deren Zeilenrichtungen ge- 
geneinander um 90° versetzt sind, so da£ fur 
jede Richtung die Zugriffszeiten in Zeilenrich- 40 
tung verfugbar sind, 

— eine Reduzierung der zu verarbeitenden 
Bildpunkte durch eine rechteckige langge- 
streckte Form der Bildelemente (8) bei gleich- 
zeitiger Ausrichtung der Langserstreckung 45 
der BUdeiemente (8) parallel zu geraden Kan- 
ten eines Objektes (6) geschieht 
9. Verfahren nach Anspruch 8, worin eine zusatzli- 
che Reduzierung der zu verarbeitenden Bildpunkte 
durch Auswahl von fur die Verarbeitung notwendi- 50 
gen Teilbereichen des Bildes geschieht 
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